Cha ông là Tô Ung, cuối đời Tùy tập hợp mấy ngàn người trong làng chống lại các cánh nghĩa quân xâm phạm bản quận . Định Phương kiêu dũng phi thường, can đảm tuyệt luân, theo cha chiến đấu từ năm 15 tuổi, nhiều lần xung phong phá trận. Ung mất, quận thú lệnh ông thay cha thống lãnh bộ hạ, tự tay chém chết thủ lĩnh nghĩa quân Trương Kim Xưng ở phía nam quận, đánh bại Dương Công Khanh ở phía tây, truy kích hơn 20 dặm, giết địch rất nhiều; người trong vùng cậy nhờ . Sau theo về với Đậu Kiến Đức, bộ tướng của Kiến Đức là Cao Nhã Hiền rất yêu mến, nhận làm con nuôi. Nhã Hiền đi theo Lưu Hắc Thát, Định Phương trận nào cũng lập công. Khi Hắc Thát, Nhã Hiền mất, ông về quê nhà .